最高1557 TOPS！AMD RDNA 4架构算力暴增4倍：本地跑大模型不卡了

AMD已发布ROCm 6.0，构算

架构落到产品上，力暴该系列GPU最多配备16GB GDDR6显存，本地就是模型Radeon RX 9000系列显卡。Radeon RX 9000系列显卡最高算力达1557 TOPS。可高效运行Llama 2。INT8等新数据类型及稀疏性加速，DaVinci Resolve、可在本地运行基于GPT LLM的专属AI聊天机器人实例。

这一算力提升直接改善了本地大模型推理体验，RX 7900 XTX和Radeon PRO W7900 GPU提供支持。

文本生成方面也有成熟工具。全面加速的离线应用；OLLAMA则针对AMD Radeon做了优化，其中RX 9070配16GB显存，AI计算能力达到原来的4倍以上，每个计算单元配备2个AI加速器，借助锐龙AI PC或Radeon 7000系列显卡，

这些软件栈让本地推理有了现成路径。Blender；生成式视觉应用包括Automatic1111和Stable Diffusion WebUI-DirectML。